Textuality Rubric Development in PISA Criterion

Çalışmada ders kitaplarındaki metinleri değerlendirmek üzere “PISA Ölçütünde Metinsellik Rubriği”nin (PÖMR) geliştirilmesi amaçlanmıştır. Veriler 2019-2020 eğitim-öğretim yılında okutulan ortaokul (5-8. sınıf) Türkçe kitaplarında serbest okuma metni olarak yer alan ve PISA’nın sürekli metin özelliklerini taşıyan 20 metninin 4 bağımsız puanlayıcı tarafından puanlanmasıyla elde edilmiştir. Analitik rubrik için ölçüt atanırken PISA 2018 becerileri değerlendirme çerçevesindeki bilişsel süreçler yeterlik düzeyleri dikkate alınmıştır. Her 3 farklı başarı derecesi tanımlanmıştır. Geliştirilen analitik rubriğin geçerlik kanıtlarının sağlanması öncelikle 8 uzmanın görüşüne başvurulmuştur. Toplanan uzman tepkileri üzerinden her bir kapsam oranı hesaplanmıştır. Uzman görüşünden gelen dönütler ile kanıtı olması amacıyla temel bileşenler analizi uygulanmıştır. güvenirlik kanıtları hesaplanan sınıf içi korelasyon katsayısı .96 Cronbach alfa değeri bulunmuştur. Puanlayıcılar arası güvenirliğe kanıt sağlamak 2 öğretmeninin yaptığı puanlamalar ağırlıklandırılmış Kappa Elde edilen testine göre ölçütleri iyi çok uyuşma göstermiştir. Yapılan çalışmalarla “bilgiye ulaşma”, “anlama” “derinlemesine düşünme değerlendirme” olmak ana toplam alt ölçütten oluşan Rubriği” geliştirilmiştir. geçerli güvenilir ölçme aracı olduğu sonucuna ulaşılmıştır.